1d9e1e7a5af0d3a9189851b3aea144982536a357
test
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-15 19:10:29.013627 UTC
- file basename
- out
test-A / 98e4c1cafa1dfe9b18b37b99db2096ec10cebb17
| Metric | Score |
|---|---|
| NDCG@10 | 48.46 |
dev-0 / 8c8eb28e3dbc4ae66f63f639886103e6d5d09eaa
| Metric | Score |
|---|---|
| NDCG@10 | 22.63 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 531352-2 1104939-1 548648-3 886820-2 993616-2 886820-3 881198-1 1785080-1 1158331-1 1287330-0 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 2005270-0 49762-0 3572733-0 49767-0 1929638-0 1929638-15 69256-28 1131567-3 109175-0 1753674-4 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 54733-2 55688-19 4518252-14 134630-2 799773-4 1442438-1 4657353-27 146627-0 4723652-3 892919-1 | 0.00 |
| 4 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 1590509-0 118590-0 3541134-1 377886-0 1814605-0 1515321-1 118590-13 1515321-0 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4978480-17 5164089-0 1340884-1 5105-68 1892622-40 681454-5 1892622-31 2400947-0 1791387-0 3748706-0 | 0.00 |
| 6 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1401357-1 672091-4 4499636-2 2995080-4 14659-2 1855708-5 1378233-0 3098276-0 4583298-5 594123-5 | 0.00 |
| 7 | wiki-trivia Jak z łaciny nazywa się zmętnienie soczewki oka? | 49463-0 | 1835554-0 37242-4 144165-2 37242-15 4420383-3 186946-2 1041962-2 744327-2 1308285-14 1041967-13 | 0.00 |
| 8 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 181282-7 181284-0 941032-0 11289-3 4608972-0 3710137-7 181264-0 37916-0 1741905-49 | 0.00 |
| 9 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1005097-0 225555-0 1005699-0 1005385-1 1005712-0 1004592-0 960880-4 779791-2 764160-15 1148013-2 | 0.00 |
| 10 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 765923-8 27660-4 27660-2 1000009-30 344406-0 2807595-7 111542-63 1536273-2 4097942-6 27660-12 | 0.00 |
| 11 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3256060-0 2758819-0 1965911-0 1121005-2 461101-1 692461-0 4438524-0 2739552-1 1956520-0 770-24 | 0.00 |
| 12 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 1136343-0 1840674-1 8148-0 2194128-0 1757857-0 1756843-0 512538-2 547665-0 1756839-0 1497109-0 | 0.00 |
| 13 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 4476880-0 4710309-0 73042-0 4795017-0 4715364-1 2885146-0 5199359-5 1695117-0 2116275-0 | 0.00 |
| 14 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 1834-101 1707589-10 10256-47 1827785-30 1770932-1 44828-120 320462-98 12237-54 851203-7 | 0.00 |
| 15 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 2295876-1 2198747-0 1823321-1 862660-0 3534465-0 1895169-0 3136577-0 169168-13 1099762-2 183809-5 | 0.00 |
| 16 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 3277-9 4468-0 30332-1 4428906-3 1730364-24 513522-0 186268-14 30332-19 44772-6 3289-25 | 0.00 |
| 17 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 4201896-1 1461623-5 4201896-0 1848206-24 89359-0 88970-3 88970-2 1115392-0 | 0.00 |
| 18 | wiki-trivia Który półwysep Azji jest największy? | 105934-0 | 251-11 3129387-0 4874-0 251-7 305246-0 304464-0 21435-18 1281635-1 242762-1 135358-0 | 0.00 |
| 19 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 1063248-6 928778-4 1066707-1 1063248-0 3685328-119 85675-11 85675-14 1518180-23 | 0.00 |
| 20 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 2930630-26 318249-12 93420-0 765307-0 318249-0 538630-2 318249-1 1797224-0 802949-47 5118056-1 | 0.00 |
| 21 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2789510-3 1263801-7 44854-22 170271-2 82189-7 1834162-0 301955-0 2174186-2 456762-2 1668859-1 | 0.00 |
| 22 | wiki-trivia W którym roku odbył się po raz pierwszy festiwal na Woodstock? | 6857-0 61567-58 32954-0 2376129-0 1160069-0 | 61567-6 61567-5 6857-13 2770287-0 449468-11 4707906-2 2592628-1 61567-20 897826-1 3174687-2 | 0.00 |
| 23 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 249800-4 620440-3 3040951-3 249888-7 660927-11 162637-112 286436-11 746926-59 3740698-27 1674604-4 | 0.00 |
| 24 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 90189-0 811817-27 1191642-5 980124-2 5052021-0 125656-1 140234-19 849168-2 11638-1 5052017-2 | 0.00 |
| 25 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1919191-28 1002955-29 2239844-21 644625-23 1081488-8 2054599-0 792050-5 1249108-5 4450256-0 | 0.00 |
| 26 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 1298226-66 4115201-51 1599961-0 1419330-21 145706-1 145706-0 294213-1 500485-360 153994-26 3601181-7 | 0.00 |
| 27 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 363695-7 1048048-3 552783-2 552405-0 863190-0 17796-19 243442-5 314765-5 1856156-3 | 0.00 |
| 28 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1874026-0 2034735-0 1456227-0 2028372-13 1219119-0 5531-0 1193751-0 1209122-1 2027875-9 597206-1 | 0.00 |
| 29 | wiki-trivia Czy wśród dwunastu apostołów był uczeń o imieniu Bartłomiej? | 121881-0 121881-2 16801-7 32283-1 3332578-2 | 121881-3 956226-3 102405-0 1461947-0 1461947-1 398692-1 2175926-0 2189500-0 395225-14 2189500-1 | 0.00 |
| 30 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 106247-3 4363574-5 193584-2 3988455-5 1418508-456 1418508-296 1418508-339 4603710-210 134896-1 | 0.00 |
| 31 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 2311468-1 43683-7 43683-6 1460654-0 43683-10 126631-9 984901-6 15195-9 4541971-5 984901-17 | 0.00 |
| 32 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 1108611-1 434394-136 3538138-40 185547-5 7523-17 3036663-22 1491316-1 17348-87 331182-4 308840-5 | 0.00 |
| 33 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 32410-0 33267-0 35201-1 1367257-8 2582104-0 2581917-1 2545005-0 174123-6 1465459-1 1066149-1 | 0.00 |
| 34 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 4711553-0 2326487-0 1673523-11 1673523-0 4798405-25 2900282-12 138218-1 1525907-0 1809008-0 4798405-23 | 0.00 |
| 35 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 7774-1 165529-32 2022936-6 2081539-17 2605129-9 1588593-3 7526-0 3243471-12 134786-10 2815816-2 | 0.00 |
| 36 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 30333-0 30332-1 74545-62 121015-8 6149-42 77079-14 6149-17 2079167-0 136382-4 75643-15 | 0.00 |
| 37 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 5047935-0 2070144-0 1309650-1 904989-6 1906305-0 1309650-6 2847383-0 2521418-0 9576-11 2975809-0 | 0.00 |
| 38 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 3039370-0 3514566-1 2244425-4 2797003-0 2462290-0 189807-29 1863525-0 2462290-7 1258542-7 115521-7 | 0.00 |
| 39 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 2909498-11 4674879-8 4570607-2 130317-0 285008-0 2755296-0 1796728-3 302733-30 274668-4 1160587-16 | 0.00 |
| 40 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 316377-9 2828147-5 3144098-1 2735278-7 2828147-7 968329-34 3074-31 42400-11 291285-2 60570-8 | 0.00 |